我們嘗試操作一下hdfs
[root@quickstart Desktop]# hdfs dfs -ls /
Found 6 items
drwxrwxrwx ? - hdfs ?supergroup ? ? ? ? ?0 2017-10-23 10:29 /benchmarks
drwxr-xr-x ? - hbase supergroup ? ? ? ? ?0 2020-04-28 01:06 /hbase
drwxr-xr-x ? - solr ?solr ? ? ? ? ? ? ? ?0 2017-10-23 10:32 /solr
drwxrwxrwt ? - hdfs ?supergroup ? ? ? ? ?0 2020-04-28 01:06 /tmp
drwxr-xr-x ? - hdfs ?supergroup ? ? ? ? ?0 2017-10-23 10:31 /user
drwxr-xr-x ? - hdfs ?supergroup ? ? ? ? ?0 2017-10-23 10:31 /var
在這需要注意一下,我們使用HDFS的全路徑嘗試一下
[root@quickstart Desktop]# hdfs dfs -ls hdfs://127.0.0.1:9000/
20/04/28 01:13:57 WARN ipc.Client: Failed to connect to server: quickstart.cloudera/127.0.0.1:9000: try once and fail.
java.net.ConnectException: Connection refused
結果發現執行報錯,這是因為CDH中啟動的Hadoop集群,namenode的端口號是8020,不是9000,這一點需要注意一下
[root@quickstart Desktop]# hdfs dfs -ls hdfs://127.0.0.1:8020/
Found 6 items
drwxrwxrwx ? - hdfs ?supergroup ? ? ? ? ?0 2017-10-23 10:29 hdfs://127.0.0.1:8020/benchmarks
drwxr-xr-x ? - hbase supergroup ? ? ? ? ?0 2020-04-28 01:06 hdfs://127.0.0.1:8020/hbase
drwxr-xr-x ? - solr ?solr ? ? ? ? ? ? ? ?0 2017-10-23 10:32 hdfs://127.0.0.1:8020/solr
drwxrwxrwt ? - hdfs ?supergroup ? ? ? ? ?0 2020-04-28 01:06 hdfs://127.0.0.1:8020/tmp
drwxr-xr-x ? - hdfs ?supergroup ? ? ? ? ?0 2017-10-23 10:31 hdfs://127.0.0.1:8020/user
drwxr-xr-x ? - hdfs ?supergroup ? ? ? ? ?0 2017-10-23 10:31 hdfs://127.0.0.1:8020/var
在這里同樣可以訪問HDFS的web界面和YARN的web界面
在這里訪問HDFS的web界面我們需要使用50070端口,因為這里面的hadoop集群的版本是2.6的,在hadoop2.x中hdfs的web界面端口是50070
可以通過hadoop version命令查看版本號
[root@quickstart Desktop]# hadoop version
Hadoop 2.6.0-cdh5.13.0
Subversion http://github.com/cloudera/hadoop -r 42e8860b182e55321bd5f5605264da4adc8882be
Compiled by jenkins on 2017-10-04T18:08Z
Compiled with protoc 2.5.0
From source with checksum 5e84c185f8a22158e2b0e4b8f85311
This command was run using /usr/lib/hadoop/hadoop-common-2.6.0-cdh5.13.0.jar
?
?